• 专利附录
  • 专利说明
  • 权利要求
  • 类似技术
  • 同族专利
  • 引用文献
  • 法律状态
  • 优先权
    • 专利摘要:
    Die Erfindung betrifft eine mobile Vorrichtung, mit einem Kopfhörer mit zwei Lautsprechern, einem Ortungsmodul zur Erzeugung von Positionsdaten und von Orientierungsdaten in Abhängigkeit von der Position und der Orientierung des Kopfhörers in einem realen Raum, einem Speicher zur Speicherung von akustischen Quellsignalen und den akustischen Quellsignalen zugeordnete Objektpositionsdaten und/oder Objektorientierungsdaten in einem virtuellen Raum, einem Prozessor, der dazu ausgelegt ist, die Positionsdaten und die Orientierungsdaten von dem Ortungsmodul zu empfangen, die akustischen Quellsignale und die den akustischen Quellsignalen zugeordneten Objektpositionsdaten und/oder Objektorientierungsdaten aus dem Speicher zu lesen, in Abhängigkeit der Positionsdaten, der Orientierungsdaten, der Objektpositionsdaten und/oder der Objektorientierungsdaten den gespeicherten akustischen Quellsignalen entsprechende akustische Objektsignale an den Kopfhörer derart auszugeben, dass die gespeicherten akustischen Quellsignale einem den Kopfhörer tragenden Hörer entsprechend den zugehörigen Objektpositionsdaten und/oder Objektorientierungsdaten akustisch verortet erscheinen.
    公开号:EP3709677A1
    申请号:EP20171652.9
    申请日:2015-03-13
    公开日:2020-09-16
    发明作者:Steffen Armbruster
    申请人:Framed Immersive Projects & Co KG GmbH；
    IPC主号:H04S7-00
    专利说明:
    [0001] Die vorliegende Erfindung betrifft ein Ortungsmodul, eine mobile Vorrichtung, ein System zur Verortung akustischer Signale in einem realen Raum sowie ein entsprechendes Verfahren.
    [0002] Es sind für Museumsbesuche sogenannte Audioguides bekannt, die von Besuchern getragen werden und an einzelnen Exponaten passende Informationen wiedergeben. Der Besucher trägt hierbei einen mit dem Audioguide verbund Kopfhörer, tritt mit dem Audioguide vor ein Exponat, gibt eine an dem Exponat angebrachte Nummer ein und der Audioguide spielt beispielsweise eine entsprechende gesprochene Information über den Kopfhörer ab. Alternativ gibt es Audioguidesysteme, bei denen man den Audioguide vor einen Sensor bewegt, um so die Wiedergabe der Informationen zu aktivieren. Neueste Audioguidesysteme arbeiten mit Infrarotsignalen, sodass der Audioguide automatisch erkennt, wenn sich der Besucher mit dem Audioguide vor einem Exponat befindet und so die Wiedergabe starten kann. Daneben existieren Audioguidesysteme, die erkennen, wenn ein Benutzer mit einem solchen Audioguide einen bestimmten Raum betritt. Mit dem Betreten wird eine dem Raum zugehörige Tonsequenz zum Abspielen gebracht.
    [0003] Diese Systeme weisen eine nur eingeschränkte Zuordnung von Tonsequenz oder gesprochener Information und Exponat auf. Ist ein aktive Handeln des Benutzers wie in dem Fall der Zifferneingabe notwendig, kann der Benutzer zwar ohne Weiteres die Verbindung zwischen abgespielter Information und Exponat erkennen, die Bedienung ist aber umständlich, wenig intuitiv und auf Dauer ermüdend. Bei einer automatische startenden Wiedergabe hingegen ist für den Benutzer unter Umständen die Verbindung zwischen der abgespielten Information und dem Exponat nicht ohne Weiteres erkennbar. Der Besucher muss entweder eine solche Korrelation gedanklich selbst herstellen oder sie wird in der abgespielten Information gegeben.
    [0004] Des Weiteren kann es vorkommen, dass während des Abspielens einer solchen Tonsequenz der Benutzer abgelenkt wird und somit nicht mehr eine genaue Zuordnung der Tonsequenz zu dem Exponat für den Besucher ersichtlich ist. Er muss dann entweder den entsprechenden Code neu eingeben oder mittels des Sensors die Tonsequenz neu starten. Insgesamt ermöglichen solche Systeme keine intuitive Verbindung zwischen Exponat und abgespielter Information.
    [0005] Es ist eine Aufgabe der Erfindung, ein Ortungsmodul, eine mobile Vorrichtung, ein System für eine solche mobile Vorrichtung sowie ein Verfahren anzugeben, welche die genannten Nachteile vermeiden und beispielsweise eine intuitivere Verbindung zwischen Tonsequenz und Exponat ermöglichen.
    [0006] Diese Aufgabe wird durch die Merkmale der unabhängigen Ansprüche gelöst. Weitere Ausgestaltungen der Erfindung sind in den abhängigen Ansprüchen angegeben.
    [0007] Das erfindungsgemäße Ortungsmodul zur Erzeugung von Positionsdaten in Abhängigkeit von der Position des Ortungsmoduls in einem realen Raum weist Sensoren zur Erfassung der Position des Ortungsmoduls und zur Ausgabe von Sensorsignalen sowie einen Empfänger zum Empfangen von Positionssignalen, einen Prozessor, der dazu ausgelegt ist, von die Sensorsignale und die Positionssignale zur Erzeugung von Positionsdaten zu verarbeiten sowie eine Schnittstelle zur Ausgabe der Positionsdaten auf. Mittels des Ortungsmoduls kann ein Objekt, wie beispielsweise ein Kopfhörer oder der Kopf einer Person, im Raum verortet werden. Bei der Schnittstelle kann es sich beispielsweise um eine drahtlose Schnittstelle wie eine Bluetooth- oder WLAN-Schnittstelle oder um eine drahtgebundene wie eine USB-Schnittstelle zur Datenübertragung handeln. Mittels des Ortungsmoduls kann die Position des Objekts erfasst und ausgegeben werden. In einer bevorzugten Ausführungsform weist das Ortungsmodul zusätzlich Sensoren zur Erfassung der Orientierung des Ortungsmoduls aufweist. Entsprechend ist dann der Prozessor auch dazu ausgelegt, Orientierungsdaten zu erzeugen und die Schnittstelle dazu ausgelegt, Orientierungsdaten auszugeben. Mittels der Positionsdaten und gegebenenfalls der Orientierungsdaten kann die genaue Position des Besuchers im Raum ermittelt werden und beispielsweise die einem Exponat zugehörige Tonsequenz ausgegeben werden.
    [0008] Bei einer bevorzugten Ausführungsform des Ortungsmoduls können folgende Sensoren vorgesehen sein: Sensoren zur Erfassung der Geschwindigkeit und/oder der Beschleunigung des Ortungsmoduls, insbesondere ein Inertialsensor-System mit einem 3D-Gyroskop und/oder ein 3D-Beschleunigungssensor, ein Sensor zur Erfassung von magnetischen Veränderungen, insbesondere ein 3D-Magnetometer und/oder ein Barometer. Insbesondere die Kombination oder/und Zusammenführung der Sensorsignale mit der Positionierung des Ortungsmoduls mittels der Positionssignale ermöglicht eine besonders genaue und effiziente Ermittlung der Position und der Orientierung des Ortungsmoduls.
    [0009] Bevorzugt ist das Ortungsmodul dazu eingerichtet, die Positionsdaten auf Basis der Sensorsignale zu erzeugen und die so erzeugten Positionsdaten mit den Positionssignalen abzugleichen. Insbesondere ist der Empfänger zum Empfang von auf Ultrabreitband-Technologie basierenden Positionssignalen ausgelegt. Die Positionssignale werden in Abhängigkeit von der Zeit, den Positionsdaten, den Orientierungsdaten oder/und einer Kanal- oder/und Netzbelegung empfangen. Dies wird nachfolgend detailliert unter Bezugnahme auf die noch zu beschreibende mobile Vorrichtung erläutert.
    [0010] Die erfindungsgemäße mobile Vorrichtung weist einen Kopfhörer mit je einem Lautsprecher für jedes Ohr oder einen entsprechenden Ohrhörer auf. Des Weiteren weist die mobile Vorrichtung ein Ortungsmodul zur Erzeugung von Positionsdaten und von Orientierungsdaten in Abhängigkeit von der Position und der Orientierung des Kopfhörers in einem realen Raum auf.
    [0011] Der Begriff Kopfhörer soll sowohl Kopfhörer mit auf den Ohren aufliegenden Lautsprechern als auch sogenannte Ohrhörer umfassen, bei denen die Lautsprecher ganz oder teilweise in das Ohr oder den Gehörgang eingebracht werden. Unter Positionsdaten werden Daten verstanden, die eine genaue Position eines Objekts in einem Raum angeben, beispielsweise durch drei Raumkoordinaten wie etwa x, y, z beschrieben. Unter Orientierungsdaten soll die räumliche Orientierung oder Ausrichtung des Objekts in dem Raum verstanden werden. Zur vollständigen Definition einer Orientierung eines Objekts in einem Raum werden üblicherweise drei Winkelgrößen angegeben. Im vorliegenden Fall kann es ausreichend sein, nur einen Winkel wie beispielsweise die Ausrichtung des Kopfhörers hinsichtlich einer vertikalen Achse anzugeben. Alternativ können zwei Winkel wie etwa die eben erwähnte Drehung um eine vertikale Achse sowie die Ausrichtung des Kopfhörers um eine Achse, die waagrecht durch beide Lautsprecher verläuft, auch Nickachse genannt.
    [0012] Des Weiteren weist die mobile Vorrichtung einen Speicher auf. Der Speicher dient zur Speicherung von akustischen Quellsignalen und den akustischen Quellsignalen zugeordnete Objektpositionsdaten und/oder Objektorientierungsdaten in einem virtuellen Raum. Unter akustischen Quellsignalen werden alle Arten von Signalen verstanden, die über die Lautsprecher eines Kopfhörers ausgegeben werden können, also beispielsweise gesprochene Sprache, Musik, Geräusche, Töne, etc.
    [0013] Die Objektpositionsdaten und/oder Objektorientierungsdaten legen fest, wo das akustische Quellsignal verortet sein soll und in welche Richtung es hörbar sein soll. Dabei können die Objektpositionsdaten und/oder Objektorientierungsdaten auch eine zeitliche Veränderbarkeit aufweisen. Es können also beispielsweise Zeiträume festgelegt sein, in denen bestimmte akustische Quellsignale an den angegebenen Objektpositionsdaten und/oder Objektorientierungsdaten auftreten sollen. Es kann auch in den Objektpositionsdaten und/oder Objektorientierungsdaten festgelegt sein, dass während der Wiedergabe eines akustischen Signals dieses eine räumliche und/oder Richtungsveränderung erfährt. Diese Objektpositionsdaten und/oder Objektorientierungsdaten sind beispielsweise einem Objekt in dem realen Raum zuordenbar. Das Objekt kann beispielsweise ein Exponat in einem Museumsraum sein.
    [0014] Es besteht also eine Verknüpfung zwischen dem virtuellen Raum, in dem die akustischen Quellsignale verortet sind, und dem realen Raum, in dem sich Objekte befinden. Die Objekte können reale greifbare Exponate, projizierte Filmvorführungen oder Lichteffekte in dem realen Raum sein. Es findet also eine Verknüpfung realer visueller Eindrücke durch Objekte mit akustischen Signalen statt. Auch eine Veränderung der Objekte in dem Raum kann durch eine entsprechende Positions- oder/und Orientierungsveränderung der akustischen Signale begleitet sein.
    [0015] Die mobile Vorrichtung weist einen Prozessor auf, der dazu ausgelegt ist, die Positionsdaten und die Orientierungsdaten von dem Ortungsmodul zu empfangen, die akustischen Quellsignale und die den akustischen Quellsignalen zugeordneten Objektpositionsdaten und/oder Objektorientierungsdaten aus dem Speicher zu lesen, in Abhängigkeit von den empfangenen und gelesenen Daten die akustischen Quellsignale zu verarbeiten und entsprechende akustische Objektsignale an den Kopfhörer derart auszugeben, dass die akustischen Quellsignale einem den Kopfhörer tragenden Hörer entsprechen den zugehörigen Positionsdaten und/oder Objektorientierungsdaten akustisch verortet erscheinen. Die entsprechende Richtungsverortung der akustischen Quellsignale kann aktiv durch den Prozessor erfolgen. Der Prozessor liest also das Quellsignal und erzeugt das zugehörige verortete akustische Objektsignal vor der Ausgabe an den Kopfhörer.
    [0016] Es werden also die akustischen Quellsignale wie beispielsweise ein zu einem Exponat gehöriger vorgelesener Informationstext als Tonsequenz gespeichert. Nähert sich beispielsweise der Kopfhörer dem Exponat, kann beispielsweise mit Unterschreiten eines bestimmten Entfernungsradius die Tonsequenz an dem Kopfhörer so wiedergegeben werden, dass sie direkt von dem Exponat zu kommen scheint. Auch bei einer Drehung des Kopfhörers oder einem Wegbewegen oder Zubewegen auf das Exponat hin scheint die Tonsequenz stets direkt von dem Exponat zu kommen. Somit muss der eine solche mobile Vorrichtung benutzende Besucher eines Museums nicht auf die Aktivierung der entsprechenden Tonsequenzen achten und kann die Tonsequenzen stets zweifelsfrei einem bestimmten Objekt zuordnen, da hörbar ist, von wo die entsprechende Tonsequenz zu kommen scheint.
    [0017] Zusätzlich oder alternativ kann vorgesehen sein, dass in Abhängigkeit von der Entfernung der mobilen Vorrichtung von einer Position im Raum, beispielsweise bei Unterschreiten einer Entfernung zu einem Exponat, akustische Objektsignale an den Kopfhörer ausgegeben werden, die eine Raumakustik wiedergeben. Wird die Entfernung wieder überschritten, kann die Ausgabe der positionsspezifischen Objektsignale wieder beendet werden. Der Benutzer kann also direkt vor den Exponaten in die jeweilige Klangwelt eintauchen, ohne sich um die Aktivierung der jeweiligen Tonsequenz kümmern zu müssen.
    [0018] Eine bevorzugte Ausführungsform sieht vor, dass das Ortungsmodul wie oben beschrieben ausgebildet ist. Alternativ weist das Ortungsmodul mindestens einen Sensor zur Erfassung von Orientierungsdaten oder/und Positionsdaten oder/und einen Empfänger zum Empfangen von Positionssignalen auf. Bei dem Sensor kann es sich um einen Inertialsensor zur Messung von Drehraten oder um eine Kombination unterschiedlicher Sensoren wie beispielsweise Inertialsensoren handeln. Beispielsweise kann es sich um einen, zwei oder drei orthogonal zueinander angeordnete Drehratensensoren, auch gyroskopische Sensoren oder Gyrosensoren genannt, handeln, welche die Winkelgeschwindigkeit um drei zueinander orthogonal angeordnete Achsen messen. Alternativ oder zusätzlich kann der Sensor beispielsweise Sensoren umfassen, ein einer translatorischen Beschleunigung oder ein einer Translation der mobilen Vorrichtung entsprechendes Sensorsignal erzeugen. Bei den Positionssignalen kann es sich beispielsweise um Signale eines lokalen Funknetzes wie etwa eines WLAN-Systems (WLAN = Wireless Local Area Network) handeln. Es können aber auch proprietäre Positionssignale entsprechender Sender vorgesehen sein. Dabei können die Positionsdaten beispielsweise über Eigenschaften des Positionssignals wie etwa die Richtung oder/und die Feldstärke des Positionssignals ermittelt werden. Alternativ kann das Positionssignal aber auch die Position des Kopfhörers selbst übertragen.
    [0019] Vorteilhafterweise kann bei der mobilen Vorrichtung oder dem Ortungsmodul vorgesehen sein, dass die Positionsdaten auf Basis der Sensorsignale erzeugt und die so erzeugten Positionsdaten mit den Positionssignalen abgeglichen werden. Die Positionssignale werden also zunächst auf Basis von in der mobilen Vorrichtung oder dem Ortungsmodul vorhandenen Sensorsignalen erzeugt, insbesondere fortlaufend erzeugt, und beispielsweise an den Prozessor der mobilen Vorrichtung oder über die Schnittstelle des Ortungsmoduls ausgegeben. Die erzeugten Positionsdaten können mit Positionssignalen, die beispielsweise über den Empfänger empfangen werden, abgeglichen und gegebenenfalls korrigiert werden. Das Empfangen, Abgleichen und Korrigieren kann in Abhängigkeit von bestimmten Parametern stattfinden. Bei den Parametern kann es sich beispielsweise um eine zeitliche Taktung, ein bestimmtes Bewegungsmuster der mobilen Vorrichtung, eine Qualität der Positionssignale, eine Verfügbarkeit der Positionssignale, etc. handeln. Es kann also beispielsweise das Empfangen der Positionssignale und/oder das Abgleichen und gegebenenfalls Korrigieren der Positionsdaten anhand der Positionssignale in regelmäßigen Zeitabständen, also beispielsweise gemäß einer Taktfrequenz, wie etwa jede Sekunde, alle 2 Sekunden oder alle 500 ms erfolgen. Somit kann also sozusagen eine "Offline"-Positionsermittlung der mobilen Vorrichtung oder des Ortungsmoduls in der mobilen Vorrichtung oder dem Ortungsmodul selbst erfolgen. Die Genauigkeit der so ermittelten Position der mobilen Vorrichtung oder dem Ortungsmodul wird dann signifikant durch eine Hinzunahme des Positionssignals erhöht. Je nach Anforderung an die Positionierungsgenauigkeit der mobilen Vorrichtung oder dem Ortungsmodul im Raum kann der Abgleich durch das Positionssignal sehr häufig oder weniger häufig stattfinden. Die Häufigkeit des Abgleichs kann fest eingestellt oder dynamisch gestaltet sein. Es kann auch vorgesehen sein, dass eine Bewertung der Positionssignale in Abhängigkeit von den Positionsdaten stattfindet. Es können beispi9elsweise im realen Raum Positionen bekannt sein, an denen das Positionssignal verzerrt oder anderweitig gestört oder gar oder nicht empfangbar ist. Es kann an solchen Positionen eine Korrektur des Positionssignals anhand der Positionsdaten auf beispielsweise eine vorher in der mobilen Vorrichtung oder dem Ortungsmodul abgespeicherte Weise oder beispielsweise anhand von Plausibilitätsüberlegungen erfolgen. Alternativ kann an solchen Positionen das Positionssignal komplett ignoriert oder nur das Positionssignal einzelner Sender ignoriert werden. Es kann so ein vorteilhafter Kompromiss zwischen der notwendigen Genauigkeit der Positionsdaten der mobilen Vorrichtung oder des Ortungsmoduls und anderen Faktoren wie beispielsweise einem Energieverbrauch oder einer verfügbaren Datenrate des Positionssignals erreicht werden.
    [0020] Bei einer besonders bevorzugten Ausführungsform der Mobilevorrichtung oder des Ortungsmoduls ist vorgesehen, dass der Empfänger zum Empfang von auf Ultrabreitband-Technologie (UWB-Technologie) basierenden Positionssignalen ausgelegt ist. Insbesondere kann die mobile Vorrichtung oder das Ortungsmodul neben dem Empfänger auch einen entsprechenden Sender oder alternativ einen Transceiver aufweisen, der neben einem Empfang eines UWB-Signals auch ein Aussenden eines UWB-Signals ermöglicht. Bei der Ultrabreitband-Technologie kann es sich beispielsweise um eine Technologie nach dem Standard IEEE 802.15.4 UWB PHY handeln. Beispielsweise können hierbei folgende Kanäle spezifiziert sein: Kanalnummer Mittelfrequenz (MHz) Bandbreite (M Hz) 1 3494,4 499,2 2 3993,6 499,2 3 4492,8 499,2 4 3993,6 1331,2 * 5 6489,6 499,2 7 6489,6 1081,6
    [0021] Der Einsatz der UWB-Technologie erlaubt die gleichzeitige Verwendung anderer Funksysteme wie beispielsweise von WLAN-Systemen. Ferner kann mit der UWB-Technologie eine bidirektionale Kommunikation etabliert werden.
    [0022] Die UWB-Technologie erlaubt es außerdem, dass die Positionssignale in Abhängigkeit von bestimmten Parametern empfangen/gesendet werden. Beispielsweise kann der Empfang oder/und das Aussenden eines Positionssignals nur zu bestimmten Zeitpunkten, beispielsweise alle 10 Sekunden, jede Sekunde, alle 500 ms oder alle 100 ms konfiguriert sein.
    [0023] Gleichzeitig oder alternativ kann in Abhängigkeit von den Positionsdaten oder/und Orientierungsdaten des Ortungsmoduls ein Empfang oder/und ein Aussenden eines Positionssignals stattfinden. Kann aus den Positionsdaten oder/und den Orientierungsdaten beispielsweise geschlossen werden, dass sich die mobile Vorrichtung oder das Ortungsmodul nicht bewegt, ist der Empfang oder/und die Aussendung eines weiteren Positionssignals nicht notwendig. Zeigen hingegen die Positionsdaten oder/und die Orientierungsdaten an, dass sich die mobile Vorrichtung oder das Ortungsmodul schnell bewegt, kann es sinnvoll sein, einen häufigeren Empfang oder/und ein häufigeres Aussenden der Positionssignale zu realisieren. Es kann also die Empfangs- oder/und Aussendehäufigkeit von dem Ort, der Geschwindigkeit oder/und der Beschleunigung der mobilen Vorrichtung oder des Ortungsmoduls abhängig sein. Die Häufigkeit des Empfangs und/oder der Aussendung der Positionssignale kann beispielsweise durch einen oder mehrere in einem Empfangs- oder/und Sendebereich angeordneten Sender/Empfänger gesteuert werden. Alternativ oder zusätzlich kann die Empfangsund/oder Sendehäufigkeit auch durch die mobile Vorrichtung oder das Ortungsmodul selbst gesteuert werden. Hierzu ist beispielsweise eine bidirektionale Kommunikation zwischen der mobilen Vorrichtung oder dem Ortungsmodul und dem/den Sender(n)/Empfänger(n) möglich. Gleichzeitig oder alternativ kann die Häufigkeit des Empfangs oder/und des Aussendens des Positionssignals von einer Kanal- oder/und Netzbelegung abhängig sein. Ist beispielsweise eine größere Anzahl an mobiler Vorrichtungen oder Ortungsmodule innerhalb eines Empfangs-/Sendebereichs, kann es notwendig sein, die Häufigkeit des Empfangs oder/und des Aussendens des Positionssignals herabzusetzen, um eine Überbelegung eines Sende/Empfangskanals oder eines Netzes zu vermeiden. Des Weiteren kann es von Vorteil sein, wenn der Empfang oder/und das Aussenden eines Positionssignals von einem der mobilen Vorrichtung oder dem Ortungsmodul zur Verfügung stehenden Energievorrat abhängig ist. Geht beispielsweise der Energievorrat der mobilen Vorrichtung oder dem Ortungsmodul zur Neige, kann es sinnvoll sein, den Empfang oder das Aussenden des Positionssignals weniger häufig stattfinden zu lassen.
    [0024] Die genannten Möglichkeiten zur Einstellung der Empfangs- oder/und der Sendehäufigkeit des Positionssignals erlauben es in überraschender Weise, einen für den Betrieb der mobilen Vorrichtung oder dem Ortungsmodul notwendigen Parametersatz zu finden, der eine hinreichend genaue Ortung der mobilen Vorrichtung oder des Ortungsmoduls im Raum, eine an den Energievorrat der mobilen Vorrichtung oder des Ortungsmoduls angepasste Empfangsund gegebenenfalls Sendeleistung und eine an die in einem Empfangs- bzw. Sendebereich vorhandene Anzahl an mobilen Vorrichtungen oder Ortungsmodule angepasste Kanal- bzw. Netzwerkbelegung zu finden.
    [0025] Bei der Ermittlung der Position der mobilen Vorrichtung oder des Ortungsmoduls aus den Positionssignalen kann beispielsweise ein Laufzeitverfahren ("time-of-flight", "TOF") zum Einsatz kommen. Dabei wird die Laufzeit eines Signals von einem Sender/Empfänger zu der mobilen Vorrichtung oder dem Ortungsmodul zur Ermittlung der Position herangezogen. Es kann beispielsweise eine Nachricht von der mobilen Vorrichtung oder dem Ortungsmodul zu einem Sender/Empfänger, von dem ersten Sender/Empfänger zu einem zweiten Sender/Empfänger und von dem zweiten Sender/Empfänger zu der mobilen Vorrichtung oder dem Ortungsmodul gesendet werden und daraus die Laufzeit des Signals zwischen der mobilen Vorrichtung oder dem Ortungsmodul und Sender/Empfänger berechnet werden.
    [0026] Alternativ kann ein Verfahren zum Einsatz kommen, das die Ankunftszeitdifferenzen eines von der mobilen Vorrichtung ausgesendeten Signals an verschiedenen Empfangsstellen berücksichtigt ("time difference of arrival", "TDOA"). Sendet die mobile Vorrichtung oder das Ortungsmodul periodisch ein Signal aus, kann aus den Ankunftszeiten an verschiedenen Empfangsstellen, die eine miteinander synchronisierte Zeitbasis besitzen, auf die Position der mobilen Vorrichtung oder des Ortungsmoduls geschlossen werden.
    [0027] Alternativ kann die Position des Kopfhörers durch ein in dem Raum vorhandenes System ermittelt und über das System als Positionssignal an die mobile Vorrichtung übertragen werden.
    [0028] Eine ebenfalls vorteilhafte Weiterbildung der Erfindung sieht vor, dass die mobile Vorrichtung dazu eingerichtet ist, die Objektpositionsdaten und/oder Objektorientierungsdaten von einer weiteren mobilen Vorrichtung zu empfangen und/oder an eine weitere mobile Vorrichtung zu senden. Beispielsweise kann eine benachbarte mobile Vorrichtung als ein Objekt in dem realen Raum behandelt werden und selbst entsprechenden akustischen Quellsignalen zugeordnet sein. Beispielsweise kann sich in dem virtuellen Raum lediglich optisch simuliert Wasser am Boden befinden. Bewegen sich nun zwei Besucher mit je einer mobilen Vorrichtung durch diesen Raum, kann die Bewegung der Besucher durch das simulierte Wasser mit Wasserplätschern akustisch verknüpft sein. Somit bewegt sich für eine erste mobile Vorrichtung die benachbarte zweite mobile Vorrichtung als Objekt in dem realen Raum. Der zweiten mobilen Vorrichtung sind entsprechende Objektpositions- und Objektorientierungsdaten sowie akustische Quellsignale zugeordnet. Es ist auf der ersten mobilen Vorrichtung das Wasserplätschern bei einer Bewegung der benachbarten zweiten mobilen Vorrichtung hörbar. Selbstverständlich kann jede Art von akustischem Signal der zweiten mobilen Vorrichtung zugeordnet sein.
    [0029] Eine besonders bevorzugte Ausführungsform der vorliegenden Erfindung sieht vor, dass mindestens ein Mikrofon zur Aufnahme akustischer Umgebungssignale vorgesehen ist. Vorzugsweise ist in der Nähe eines Lautsprechers je ein Mikrofon an dem Kopfhörer angeordnet. Besonders bevorzugt dient das eine oder die zwei Mikrofone zur räumlich aufgelösten Aufnahme akustischer Umgebungssignale. Es ist also vorgesehen, die Umgebungsgeräusche der mobilen Vorrichtung, insbesondere des Kopfhörers, als akustische Umgebungssignale aufzunehmen und als solche - gleichzeitig oder alleine - an den Kopfhörer auszugeben. Dies unterstützt die räumliche und akustische Orientierung eines Hörers in dem Fall, das neben den virtuellen Geräuschen auch reale Geräusche, wie etwa Gespräche benachbarter Besucher etc., vorhanden sind.
    [0030] Eine bevorzugte Ausführungsform sieht vor, dass der Prozessor ferner dazu ausgelegt ist, während der Ausgabe erster akustischer Objektsignale zweite akustische Objektsignale oder/und die akustischen Umgebungssignale auszugeben. Es ist also möglich, neben konkreten objektbezogenen akustischen Signalen weniger stark räumlich bezogene Hintergrundsignale auszugeben. Dies kann beispielsweise dazu verwendet werden, einem Raum ein spezifisches akustisches Hintergrundszenario zugrunde zu legen, wie beispielsweise "Urwald", "Pyramidenbau", "Boxengasse" etc. Gleichzeitig können überlagert diesem Hintergrundsignal objektspezifische akustische Signale ausgegeben werden. Alternativ oder zusätzlich können die aufgenommen Umgebungssignale ebenfalls mit entsprechendem Pegel überlagert werden.
    [0031] Eine vorteilhafte Weiterbildung der Erfindung sieht vor, dass der Prozessor dazu eingerichtet ist, ein Signal zu empfangen und die akustischen Objektsignale entsprechend dem Signal auszugeben. Bei einem Signal kann es sich beispielsweise um ein Objektpositionsdatensignal, ein Objektorientierungsdatensignal, ein Synchronisationssignal oder/und ein Triggersignal handeln. Gemäß dieser Weiterbildung der Erfindung ist es also möglich, von außen der mobilen Vorrichtung die Position und Orientierung eines Objekts als Datensignal zu senden. Dies bedeutet, dass beispielsweise ein Besucher ein Objekt verschieben und/oder drehen kann und die so geänderten Positions- oder/und Orientierungsdaten der mobilen Vorrichtung gesendet werden können. Die mobile Vorrichtung kann dann entsprechend den geänderten Objektdaten entsprechende akustische Objektsignale ausgeben.
    [0032] Bei dem Synchronisationssignal kann es sich beispielsweise um ein Synchronisationssignal mit gezeigten bewegten Bildern handeln. So kann beispielsweise auf einer Leinwand oder einem Bildschirm ein Film oder eine Filmsequenz in Dauerschleife laufen. Begibt sich der Besucher mit der mobilen Vorrichtung in Sichtweite der Projektion oder des Bildschirms und empfängt ein Synchronisationssignal, kann die mobile Vorrichtung das zu der Filmsequenz oder Film gehörige akustische Objektsignal in Synchronisation mit den gezeigten bewegten Bildern ausgeben.
    [0033] Bei dem Triggersignal kann sich es beispielsweise um einen Signal handeln, das ausgegeben wird, wenn der Besucher eine bestimmte detektierbare Aktion tätigt. Dabei kann es sich beispielsweise um das Drücken eines Knopfes, eine Handbewegung oder ein durch den Benutzer erzeugtes akustisches Signal wie etwa Sprache handeln. Auf diese erfassbare Aktion des Benutzers wird ein Triggersignal ausgegeben und die mobile Vorrichtung kann die entsprechenden akustischen Objektsignale ausgeben.
    [0034] Es kann somit vorgesehen sein, dass das Signal eine zeitliche Zuordnung oder/und eine von den gespeicherten akustischen Objektpositionsdaten und/oder Objektorientierungsdaten verschiedene räumliche Zuordnung der akustischen Objektsignale ermöglicht.
    [0035] Insbesondere kann vorgesehen sein, dass das Triggersignal durch eine Aktion eines Benutzers ausgelöst wird oder/und das Synchronisationssignal eine Synchronisation der Ausgabe der akustischen Objektsignale mit der Ausgabe bewegter Bilddokumente ermöglicht.
    [0036] Eine weitere vorteilhafte Ausführungsform sieht vor, dass die den akustischen Quellsignalen zugeordneten Objektpositionsdaten oder/und Objektorientierungsdaten personenbezogen sind. Es kann also beispielsweise an der mobilen Vorrichtung eingebbar sein, dass die Person eine bestimmte Sprache spricht, ein bestimmtes Alter hat oder eine bestimmte Größe oder bestimmte Mobilitätseinschränkungen aufweist. Dies kann bei der Auswahl der akustischen Quellsignale berücksichtigt werden.
    [0037] Das erfindungsgemäße System zur Verortung akustischer Signale in einem Raum weist eine erfindungsgemäße mobile Vorrichtung sowie zumindest einen Sender in dem realen Raum auf. Der Sender ist dazu eingerichtet, mit der mobilen Vorrichtung zur Erzeugung der Positionsdaten zu kommunizieren. Beispielsweise sendet der Sender der mobilen Vorrichtung ein Positionssignal zur Bestimmung der Position der mobilen Vorrichtung. Vorteilhafter Weise umfasst ein solches System zumindest drei Sender, vorzugsweise UWB-Sender, die insbesondere als Sender und Empfänger ausgelegt sind.
    [0038] Die mobile Vorrichtung kann aus dem Positionssignal die Positionsdaten bestimmen. Dabei können die Positionsdaten entweder anhand von Eigenschaften des Positionssignals wie Richtung und/oder Feldstärke des Signals bestimmt werden oder als direkte in dem Signal enthaltende Informationen entnommen werden.
    [0039] Alternativ oder zusätzlich kann vorgesehen sein, dass die mobile Vorrichtung die Positionsdaten an einen Empfänger in dem realen Raum sendet. Die so am Empfänger vorhandenen Positionsdaten einer Mehrzahl mobiler Vorrichtungen können über ein beispielsweise serverbasiertes System an die Mehrzahl mobiler Vorrichtungen gesendet werden, so dass jede mobile Vorrichtung der Mehrzahl mobiler Vorrichtungen über die Positionsdaten aller mobiler Vorrichtungen der Mehrzahl mobiler Vorrichtungen verfügt. Die so verfügbaren Positionsdaten der mobilen Vorrichtungen der Mehrzahl der mobilen Vorrichtungen können in der jeweiligen mobilen Vorrichtung mit entsprechenden akustischen Objektsignalen korreliert werden. Dies ermöglicht ein interaktives Raumklangerlebnis, das durch die Bewegungen der verschiedenen mobilen Vorrichtungen gestaltet wird.
    [0040] Des Weiteren wird die oben genannte Aufgabe durch ein Verfahren zur Verortung akustischer Signale in einem realen Raum gelöst. Das Verfahren weist die Schritte: Bestimmen von Position und Orientierung eines Kopfhörers in einem realen Raum, Zuordnen der Position und der Orientierung des Kopfhörers in dem realen Raum einer Position und einer Orientierung in einem dem realen Raum entsprechenden virtuellen Raum, Ausgeben akustischer Signale an den Kopfhörer in Abhängigkeit von der Position und der Orientierung in dem virtuellen Raum. Die akustischen Signale sind für einen den Kopfhörer tragenden Hörer als in dem realen Raum verortet wahrnehmbar sind.
    [0041] Die Erfindung wird nun unter Bezugnahme auf die Zeichnungen näher erläutert. Es zeigen: Figur 1 eine schematische Darstellung einer Ausführungsform einer erfindungsgemäßen mobilen Vorrichtung; Figur 2 eine schematische Darstellung einer ersten Ausführungsform eines erfindungsgemäßen Systems; Figur 3 eine schematische Darstellung einer zweiten Ausführungsform eines erfindungsgemäßen Systems; Figur 4 eine schematische erläuternde Darstellung der Systeme der Figuren 2 und 3; und Figur 5 eine Ausführungsform eines erfindungsgemäßen Verfahrens.
    [0042] Figur 1 zeigt eine mobile Vorrichtung 100 mit einem Kopfhörer 110, einem Ortungsmodul 120, einem Prozessor 200 sowie einem Speicher 150. Der Kopfhörer 110 weist zwei Lautsprecher 111, 113 auf. Diese sind getrennt ansteuerbar, sodass eine Wiedergabe akustischer Signale mit Richtungslokalisation möglich ist. An jedem Lautsprecher 111, 113 weist der Kopfhörer 110 ein Mikrofon 112, 114 auf. Das Vorsehen zweier Mikrofone 112, 114 stellt eine einfache Möglichkeit dar, richtungsabhängige Tonaufnahmen von der Umgebung herzustellen. Alternativ könnte auch ein einziges Mikrofon mit entsprechender Stereoaufnahmemöglichkeit vorgesehen sein.
    [0043] Das Ortungsmodul 120 weist einen Sensor 121 zur Erfassung von Orientierungsdaten auf. Der Sensor 121 kann eine Mehrzahl von Inertialsensoren umfassen. Insbesondere kann der Sensor 121 zumindest einen Gyrosensor umfassen, der eine Drehbewegung des Kopfhörers 110 um eine vertikale Achse erfasst. Vorzugsweise erfasst der Sensor 121 zusätzlich ein Nicken des Kopfhörers 110 um einen Achse, die durch beide Lautsprecher 111, 113 verläuft.
    [0044] Das Ortungsmodul 120 weist einen Empfänger 122 zum Empfangen von Positionssignalen 123 auf. Für das Empfangen der Positionssignale 123 ist eine Antenne 124 vorgesehen. Bei den Positionssignalen 123 kann es sich um WLAN-Signale oder/und UWB-Signale handeln. Mittels verschiedener im Raum platzierter Sender kann so eine genaue Position der mobilen Vorrichtung 100 beispielsweise über ein Laufzeitverfahren ermittelt werden. Alternativ kann es sich bei den Positionssignalen 123 auch um Datensignale handeln. Die Daten für die Positionssignale 123 können über eine außerhalb der mobilen Vorrichtung 100 vorgenommene Verortung erzeugt und als Positionssignale 123 an die mobile Vorrichtung 100 gesendet werden.
    [0045] Die von dem Sensor 121 erfassten Orientierungsdaten 140 und die von dem Empfänger 122 erzeugten Positionsdaten 130 werden dem Prozessor 200 zur Verfügung gestellt.
    [0046] Der Speicher 150 dient zur Speicherung von akustischen Quellsignalen 160. Bei diesen akustischen Quellsignalen 160 kann es sich um Audiodateien handeln, die Sprache, Klang, Ton, Geräusch oder sonstige akustische Informationen enthalten. Die akustischen Quellsignale 160 können mit oder ohne Raumlokalisationsinformationen abgelegt sein.
    [0047] Den akustischen Quellsignalen 160 sind Objektpositionsdaten 170 oder/und Objektorientierungsdaten 180 zugeordnet und in dem Speicher 150 abgelegt. Die Objektpositionsdaten 170 legen fest, in welcher Position in einem virtuellen Raum das akustische Quellsignal zu verorten ist. Die Objektorientierungsdaten 180 geben Richtungsinformationen über die akustischen Quellsignale 160 wieder und legen fest, in welchem Winkelbereich das akustische Quellsignal 160 hörbar sein soll. Die Positions- und Orientierungsdaten beziehen sich auf einen virtuellen Raum, der dem realen Raum entspricht, in dem sich die mobile Vorrichtung 100 bewegt. Hierbei ist es möglich, beispielsweise Objektpositionsdaten 170 zu wählen, die sich außerhalb des reellen Raums befinden. Es kann so mittels des Kopfhörers 110 bei einem Hörer der hörbare Eindruck eines Geräuschs oder Tons von außerhalb des realen Raumes erweckt werden. Die akustischen Quellsignale 160 sowie die zugehörigen Objektorientierungsund Objektpositionsdaten 170, 180 stehen dem Prozessor 200 zur Verfügung.
    [0048] Der Prozessor 200 empfängt die Positions- und Orientierungsdaten 130, 140 von dem Ortungsmodul 120 oder kann diese von dem Ortungsmodul 120 anfordern. Der Prozessor 200 hat Lesezugriff auf den Speicher 150 und kann die akustischen Quellsignale 160 sowie die zugehörigen Objektpositions- und Objektorientierungsdaten 170, 180 lesen. Entsprechend der über das Ortungsmodul 120 ermittelten Position und Orientierung des Kopfhörers 110 ordnet der Prozessor 200 gemäß bestimmten Regeln akustische Quellsignale 160 zu. Der Prozessor 200 verarbeitet die akustischen Quellsignale 160 gemäß den Positions- und Orientierungsdaten 130, 140 sowie den zugehörigen Objektpositions- und Objektorientierungsdaten 170, 180 und gibt akustische Objektsignale 210 an den Kopfhörer 110 aus. Der Prozessor 200 kann diesenakustischen Objektsignalen 210 zweite akustische Objektsignale 211 überlagern. Beispielsweise kann ein einem bestimmten Exponat zugeordnetes erstes akustisches Objektsignal ein zweites akustisches Objektsignal 211 überlagert werden, das beispielsweise Hintergrundgeräusche trägt. Gleichzeitig kann der Prozessor 200 über die Mikrofone 112, 114 des Kopfhörers 110 aufgenommene Umgebungsgeräusche als akustische Umgebungssignale 212 zumischen und so dem Hörer des Kopfhörers 11O akustische Informationen über reale Geräusche in seiner Umgebung vermitteln. Das Abmischen der jeweiligen Pegel der akustischen Objektsignale 210, 211 sowie der akustischen Umgebungssignale 212 kann nach einem von dem Prozessor gesteuerten Schema erfolgen. Alternativ kann die mobile Vorrichtung 100 Bedienelemente 190 aufweisen, die beispielsweise ein Einstellen der einem bestimmten Exponat zugeordneten ersten akustischen Objektsignale 210 oder der akustischen Umgebungssignale 212 nach den Wünschen des Benutzers ermöglichen. Zusätzlich kann mittels der Bedienelemente ein Wiederholen, Pausieren oder Beenden der Wiedergabe der akustischen Objektsignale 210 beeinflusst werden.
    [0049] Des Weiteren kann die mobile die mobile Vorrichtung eine Stromquelle, wie beispielsweise einen Akku, zur Versorgung der einzelnen Bauteile mit Energie sowie ein Betriebssystem aufweisen, wie beispielsweise Android.
    [0050] Figur 2 zeigt ein erfindungsgemäßes System 1000 zur Verortung akustischer Signale in einem realen Raum. Das System 1000 weist eine erste, eine zweite und eine dritte mobile Vorrichtung 101, 102, 103 wie vorausgehend beschreiben auf. Des Weiteren weist das System Sender 401, 402, 403 auf, die in dem Raum verteilt angeordnet sind. Die Sender 401, 402, 403 senden Positionssignale 1231, 1232, 1233 aus. Anhand dieser
    [0051] Positionssignale 1231, 1232, 1233 können die mobilen Vorrichtungen 101, 102, 103 ihre Position in dem realen Raum bestimmen. Bei den Positionssignalen handelt es sich in diesem Ausführungsbeispiel um WLAN-Signale, deren Feldstärke und Richtung ausgewertet werden. Alternativ können auch andere Signalarten eingesetzt werden. Figur 2 zeigt als erste beispielhafte Ausführungsform ein Exponat 300. Hierbei handelt es sich um ein an einer Wand befestigtes Gemälde. Dieses Gemälde ist als Objekt 300 in dem realen Raum vorhanden. In den mobilen Vorrichtungen 101, 102, 103 sind entsprechende akustische Quellsignale 160 sowie eine entsprechende Verortung der akustischen Quellsignale in Form von Objektpositionsdaten 170 und Objektorientierungsdaten 180 hinterlegt. Je nach Position der mobilen Vorrichtungen 101, 102, 103 erscheint das akustische Quellsignal 160 entsprechend dem realen Objekt 300 verortet. Bei dem akustischen Quellsignal 160 kann es sich beispielsweise um einen gesprochenen Informationstext über das Gemälde 300 handeln. Alternativ kann es sich hierbei ein zu dem Gemälde 300 passendes Musikstück oder um aufgenommene Sprache handeln, die von beispielsweise von einer Person gesprochen erscheint, die auf dem Gemälde 300 zu sehen ist. Dabei erscheint der Ton beispielsweise für eine etwas kleinere Person, welche die mobile Vorrichtung 102 trägt, als leicht von oben kommend, während für etwas grö-βere Personen, die beispielsweise die mobilen Vorrichtungen 101, 103 tragen, als von gleicher Höhe kommend.
    [0052] Figur 3 zeigt eine zweite erfindungsgemäße Ausführungsform eines erfindungsgemäßen Systems 1000. Bei dieser Ausführungsform weist das System anstatt eines Objekts 300 eine Leinwand oder ein Bildschirm 310 auf. Der Bildschirm oder die Leinwand 310 weisen eine nennenswerte Ausdehnung auf. Die Leinwand oder der Bildschirm 310 ist mit einer Antenne 311 verbunden, die ein Synchronisationssignal 220 aussendet. Die mobilen Vorrichtungen 101, 102, 103 empfangen das Synchronisationssignal 220 über die Antenne 210. Der Prozessor 200 einer jeden mobilen Vorrichtung 101, 102, 103 kann nun die Wiedergabe eines akustischen Objektsignals 210 mittels des Synchronisationssignals 220 mit den auf der Leinwand oder dem Bildschirm 310 dargestellten bewegten Bildern synchronisieren. Gleichzeitig kann das akustische Objektsignal 210 räumlich mit der auf dem Bildschirm oder der Leinwand 310 dargestellten Szenerie verortet werden. Somit entsteht beispielsweise bei dem Hörer der mobilen Vorrichtung 102 eine andere akustische räumliche Situation als für einen Hörer der mobilen Vorrichtung 103. Während die mobile Vorrichtung 101 beispielsweise von dem dargestellten Kind 312 gesprochene Sprache als weiter entfernt als die von der dargestellten Frau 313 gesprochene Sprache darstellt, ist die Situation bei der mobilen Vorrichtung 103 umgekehrt. Somit entsteht für den Hörer ein stark immersives Hörerlebnis.
    [0053] Figur 4 zeigt dieses Prinzip noch einmal deutlich. In einem virtuellen Raum ist eine Schallquelle 510 angeordnet. Eine erste Person 501 trägt eine erste mobile Vorrichtung 101 und steht in einem realen Raum frontal vor einem Objekt, dem die virtuelle Schallquelle 510 zugeordnet ist. Die Person 501 hört nun über die mobile Vorrichtung 101 den Schall der virtuellen Schallquelle 510 als frontal von vorne kommend mit hoher Lautstärke. Die Person 502 mit der mobilen Vorrichtung 102 wendet sich dem Exponat, dem die virtuelle Schallquelle 510 zugeordnet ist, seitlich in größerer Entfernung zu.
    [0054] Entsprechend gibt die mobile Vorrichtung 102 den Ton der virtuellen Schallquelle 510 als von seitlich rechts kommend mit mittlerer Lautstärke aus. Die Person 503 mit der mobilen Vorrichtung 103 wendet sich von dem Objekt, dem die virtuelle Schallquelle 510 zugeordnet ist, ab und befindet sich in noch größerer Entfernung. Entsprechend gibt die mobile Vorrichtung 103 den Schall der virtuellen Schallquelle 510 als von hinten kommend und leise aus.
    [0055] Figur 5 zeigt schematisch die Schritte eines erfindungsgemäßen Verfahrens. In einem ersten Schritt S1 werden Position und Orientierung eines Kopfhörers in einem realen Raum bestimmt. In einem Schritt S2 werden der Position und der Orientierung des Kopfhörers in dem realen Raum eine Position und eine Orientierung des Kopfhörers in einem dem realen Raum entsprechenden virtuellen Raum zugeordnet. In einem Schritt S3 werden akustische Signale an den Kopfhörer in Abhängigkeit von der Position und der Orientierung des Kopfhörers in dem virtuellen Raum so ausgegeben, dass die akustischen Signale entsprechend verortet erscheinen.
    [0056] Die vorliegende Erfindung ermöglicht eine neue Art von auditivem Erleben. Durch die genaue Verortung der individuellen Position jeder einzelnen mobilen Vorrichtung und die Positionierung virtueller Soundquellen in einem dreidimensionalen Raum, welcher mit dem realen Raum, in dem sich die mobilen Vorrichtungen bewegen, zugeordnet ist, ist es möglich, dass sich jeder Benutzer einer mobilen Vorrichtung in seiner eigenen Soundwelt bewegt. Die Soundwelt kann bei Bedarf für die einzelne Person individuell gestaltet werden. Der Benutzer nimmt alle Töne genau so wahr, wie seine aktuelle Position im Raum dies erlaubt. Jeder Ton wird so zu einem erforschbaren, erlebbaren, richtungsweisenden und überraschenden Element. Der Ton wird zu einer Installation, die jeder Benutzer individuell in Kombination mit seinen visuellen Wahrnehmungen im Raum erlebt.
    [0057] Der Ton von Quellen wie Filmen oder interaktiven Exponaten wird von der mobilen Vorrichtung über den Kopfhörer abgespielt. Hierzu wird eine direkte Verbindung beispielsweise über Bluetooth zu den Quellen hergestellt, um die Gleichschaltung von Bild und Ton zu ermöglichen.
    [0058] Bei medialen Inszenierungen wie einem Film auf einer Leinwand mit beispielsweise 40 Meter Breite kann jeder im Film entstehende Ton von jedem Betrachter genau an der Stelle auf der Leinwand wahrgenommen werden, an dem er entsteht. Die Intensität des Tons ist abhängig von der Position beziehungsweise dem Abstand des Betrachters zu diesem Punkt. Mediale Installationen bekommen so eine weitere bisher nicht dagewesene Dimension.
    [0059] Der Besucher bewegt sich durch einen oder mehrere Räume. Seine Bewegung und die Orientierung seines Kopfes werden in Echtzeit getrackt. Diese Daten werden an eine Software in der mobilen Vorrichtung gesendet. In der Software sind die Räume, in der sich der Benutzer bewegt, als dreidimensionales Modell hinterlegt. Es erfolgt also eine genaue Verortung der Person im dreidimensionalen Raum der Software. In diesem dreidimensionalen Raum können nun Soundquellen an gewünschten Punkten platziert werden, die der Benutzer dann wiederum über seine Kopfhörer hören kann. Der Effekt ist, dass er die Position der Soundquellen akustisch im realen Raum erkennt.
    [0060] Durch die Bewegung im Raum kann sich der Benutzer auf Schallquellen zubewegen oder davon wegbewegen. Die Sounds sind im Kopfhörer als an definierten Punkten im Raum verortet wahrzunehmen. Die mobile Vorrichtung muss Position und Orientierung des Kopfhörers im Raum erfassen können. Das System, das den Ton zuspielt, muss auf einem dreidimensionalen Raum basieren, der individuell für jeden Einsatzort erstellt wird. In diesem Raum werden die Sounds positioniert. Durch die Positions- und Orientierungsinformationen des Kopfhörers kann sich der Benutzer in diesem Klangraum bewegen.
    [0061] In einem Anwendungsbeispiel kommt der Sound von nicht sichtbaren Ereignissen. Man ist beispielsweise in einer Ausstellung über Ägypten und hört Geräusche, wie auf einer Baustelle der Pyramiden vor tausenden von Jahren. Beim Verlassen dieses Raumes mit dem Thema "in der Pyramide" und dem Eintreten in einen anderen Raum beispielsweise mit dem Thema "Wüste" verändert sich die Akustik und der zugehörige Sound. Der Besucher kann jederzeit umkehren und wieder "in die Pyramide" gehen. Im Unterschied zu einem auf Lautsprecher ohne Kopfhörer basierenden System ergibt sich eine andere Qualität und eine deutlich immersiver zu erlebende Akustik. Übergänge zwischen den Klanginstallationen sind genau definiert einstellbar.
    [0062] In einer anderen Ausführungsform ist der Sound suggestiv. Dies bedeutet, dass sich beispielsweise mehrere nicht zu öffnende Türen in einem Raum befinden. Nähert man sich einer Türe, hört man Geräusche oder Gespräche von der anderen Seite der Türe. Die Akustik ist so gestaltet, als ob sie durch eine geschlossene Türe käme. Hier besteht der Vorteil darin, dass die Verständlichkeit für den einzelnen Benutzer genau eingestellt werden kann. Insbesondere kann der Bereich festgelegt werden, ab dem der Sound zu hören ist. Es können akustische Überschneidungen leicht vermieden werden. Darüber hinaus ist es möglich, den Ton erst bei einer definierten Annäherung und darüber hinaus für jeden Benutzer individuell zu starten.
    [0063] In einer weiteren Ausführungsform ist der Sound direkt. Beispielsweise kann ein Motor eines Formel-1-Rennwagens ausgestellt sein. Bei Annäherung oder einem Vorbeilaufen ist der laufende Motor über die mobile Vorrichtung zu hören. Mit der mobilen Vorrichtung kann der Bereich, in dem der Motorsound zu hören ist, genau eingestellt werden. Zudem ist die Veränderung der Lautstärke bei einer Annäherung genau definierbar.
    [0064] Eine weitere Ausführungsform sieht vor, dass der Sound von einer medialen Installation kommt. Denkbar ist beispielsweise eine Projektion mit 30 Meter Breite an einer Wand. Alternativ oder zusätzlich kann es sich auch um eine 360-Grad-Projektion handeln. Die einzelnen Sounds des projizierten Films sind genau an den Positionen der Leinwand verortbar, an denen sie tatsächlich im realen Raum stattfinden. Beispielsweise kann bei einer 30-Meter-breiten Projektion ganz links ein Hund gezeigt sein, der bellt. Ein Besucher, der mit der mobilen Vorrichtung direkt vor dem Hund steht, hört diesen sehr laut von vorne. Ein anderer Besucher mit einer mobilen Vorrichtung, der in dem Raum rechts weiter hinten steht, hört den Hund von weiter weg links vorne.
    [0065] Eine weitere Ausführungsform realisiert ein interaktives Exponat im Raum. Der Sound zu dem Exponat wird nicht über Lautsprecher im Raum ausgegeben, sondern über die mobile Vorrichtung. Steht der Besucher mit der mobilen Vorrichtung direkt vor dem Exponat, hört er den Sound direkt vor sich. Steht der Besucher hingegen zehn Meter entfernt von dem Exponat mit dem Rücken dazu, hört er den Sound leise hinter sich. Wird das Exponat von einer Person bedient, ist das Resultat der Interaktion akustisch wahrnehmbar.
    [0066] Eine weitere Ausführungsform realisiert interaktive Elemente, wie beispielsweise eine Wasserprojektion auf dem Boden. Geht der Besucher mit der mobilen Vorrichtung, werden optisch Wellen simuliert. Damit verknüpft ist eine Wiedergabe eines entsprechenden Geräusches über die mobile Vorrichtung unter dem Besucher verortet. Bewegt sich ein weiterer Besucher mit einer weiteren mobilen Vorrichtung zehn Meter neben dem erstgenannten Besucher und bewegt sich ebenfalls so, dass optisch Wellen erzeugt werden, hört der erste Besucher ein entsprechendes Geräusch leiser entfernt von der Seite.
    [0067] Eine weitere Ausführungsform sieht eine teilweise Kombination der genannten Möglichkeiten vor. Beispielsweise kann als Objekt im Raum ein Spiegel montiert sein. Bewegt sich ein Besucher auf den Spiegel zu, kann die mobile Vorrichtung den Ton der Fußtritte des Besuchers als diesen entgegenkommend wiedergeben.
    [0068] Die mobile Vorrichtung kann weitgehend unabhängig von zentralen Servern ausgelegt werden. Eine Datenübertragung von einem Server zu der mobilen Vorrichtung ist prinzipiell nicht notwendig. Die mobile Vorrichtung weist eine Positions- und Orientierungsbestimmung auf, beinhaltet die wiederzugebenden Sounds sowie eine Software, die einen entsprechenden Prozessor bedient. Die mobile Vorrichtung empfängt nur einzelne bestimmte Signale von au-ßen. Beispielsweise einen Timecode als Synchronisierungssignals eines Filmes oder eventuell Positionsdaten anderer Benutzer.
    [0069] Eine Aktualisierung bei eventuellen Änderungen in den Räumen kann beispielsweise an einer Ladestation oder durch einfachen Austausch einer Speicherkarte geschehen. Die mobile Vorrichtung weist somit eine Software zur Positions- und Orientierungserkennung auf, eine Software mit dem realen Raum als dreidimensionales Modell, eine Audiosoftware, die einen Sound im Raum positionieren kann. Es ist ein Chip zur Positions- und Orientierungserkennung enthalten, eine Soundkarte sowie ein Speicher zum Speichern aller Soundfiles und zum Erzeugen der akustischen Signale, ein Kopfhörer. Im Raum, in dem sich die mobile Vorrichtung bewegt, sind ein oder mehrere Sender notwendig zur Positionsbestimmung.
    权利要求:
    Claims (15)
    [0001] 1. Mobile Vorrichtung (100), mit
    a) einer Schnittstelle für akustische Signale oder/und einem Kopfhörer (110) mit zwei Lautsprechern (111, 113),
    b) einem Ortungsmodul (120) zur Erzeugung von Positionsdaten (130) und von Orientierungsdaten (140) in Abhängigkeit von der Position und der Orientierung des Kopfhörers (110) in einem realen Raum, mit einem Empfänger zum Empfangen von Positionssignalen, wobei der Empfänger zum Empfang von auf Ultrabreitband-Technologie basierenden Positionssignalen ausgelegt ist,
    c) einem Speicher (150) zur Speicherung von akustischen Quellsignalen (160) und den akustischen Quellsignalen (160) zugeordnete Objektpositionsdaten (170) und/oder Objektorientierungsdaten (180) in einem virtuellen Raum,
    d) einem Prozessor (200), der dazu ausgelegt ist,
    i) die Positionsdaten (130) und die Orientierungsdaten (140) von dem Ortungsmodul (120) zu empfangen,
    ii) die akustischen Quellsignale (160) und die den akustischen Quellsignalen (160) zugeordneten Objektpositionsdaten (170) und/oder Objektorientierungsdaten (180) aus dem Speicher (150) zu lesen,
    iii) in Abhängigkeit der Positionsdaten (130), der Orientierungsdaten (140), der Objektpositionsdaten (170) und/oder der Objektorientierungsdaten (180) den gespeicherten akustischen Quellsignalen (160) entsprechende akustische Objektsignale (210) an die Schnittstelle oder/und den Kopfhörer (110) derart auszugeben, dass die gespeicherten akustischen Quellsignale (160) einem mit den akustischen Signalen gespeisten Kopfhörer (110) tragenden Hörer entsprechend den zugehörigen Objektpositionsdaten (170) und/oder Objektorientierungsdaten (180) akustisch verortet erscheinen.
    [0002] Mobile Vorrichtung nach Anspruch 1, wobei der Prozessor (200) dazu eingerichtet ist, ein Signal (220) zu empfangen und die akustischen Objektsignale (210, 211) entsprechend dem Signal (220) auszugeben.
    [0003] Mobile Vorrichtung nach Anspruch 2, wobei das Signal ein Triggersignal ist und das Triggersignal (220) durch eine Aktion eines Benutzers ausgelöst wird, insbesondere, wenn ein Besucher eine bestimmte detektierbare Aktion tätigt.
    [0004] Mobile Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Objektpositionsdaten (170) und/oder Objektorientierungsdaten (180) in dem virtuellen Raum einem Objekt (300) in dem realen Raum zuordenbar sind.
    [0005] Mobile Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die mobile Vorrichtung (100) dazu eingerichtet ist, die Objektpositionsdaten (170) und/oder die Objektorientierungsdaten (180) von einer weiteren mobilen Vorrichtung (101) zu empfangen und/oder an eine weitere mobile Vorrichtung zu senden.
    [0006] Mobile Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass mindestens ein Mikrofon (112, 114), vorzugsweise an dem Kopfhörer (110) je ein Mikrofon (112, 114) in der Nähe eines Lautsprechers (111, 113), zur Aufnahme, vorzugsweise zur räumlich aufgelösten Aufnahme, akustischer Umgebungssignale (212) vorgesehen sind.
    [0007] Mobile Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der Prozessor (200) ferner dazu ausgelegt ist, während der Ausgabe erster akustischer Objektsignale (210) zweite akustische Objektsignale (211) oder/und die akustischen Umgebungssignale (212) auszugeben.
    [0008] Mobile Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das Signal (220) ein Objektpositionsdatensignal, ein Objektorientierungsdatensignal, ein Synchronisationssignal oder/und ein Triggersignal ist.
    [0009] Mobile Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass das Signal (220) eine zeitliche Zuordnung oder/und eine von den gespeicherten akustischen Objektpositionsdaten (170) und/oder Objektorientierungsdaten (180) verschiedene räumlichen Zuordnung der akustischen Objektsignale (210, 211) ermöglicht.
    [0010] Mobile Vorrichtung nach einem der Ansprüche 8 oder 9, dadurch gekennzeichnet, dass das Synchronisationssignal (220) eine Synchronisation der Ausgabe der akustischen Objektsignale (210, 211) mit der Ausgabe bewegter Bilddokumente (310) oder einem Lichteffekt ermöglicht.
    [0011] Mobile Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die den akustischen Quellsignalen zugeordneten Objektpositionsdaten (170) und/oder Objektorientierungsdaten (180) personenbezogen sind.
    [0012] System (1000) zur Verortung akustischer Signale in einem realen Raum, mit einer mobilen Vorrichtung (101, 102, 103) nach einem der vorhergehenden Ansprüche und einem Sender (401, 402, 403) in dem realen Raum, der dazu eingerichtet ist, mit der mobilen Vorrichtung (101, 102, 103) zur Erzeugung der Positionsdaten (170) zu kommunizieren.
    [0013] System nach Anspruch 12, wobei die mobile Vorrichtung die Positionsdaten an einen Empfänger in dem realen Raum sendet
    [0014] System nach Anspruch 12, dadurch gekennzeichnet, dass die mobile Vorrichtung für einen auf einer Anzeigefläche gezeigten Film den zum Film gehörigen Ton so als akustische Objektsignale ausgibt, dass der Ton als einer Stelle der Anzeigefläche zugehörig erscheint, an welcher der Ton zu entstehen scheint und/oder dass die Intensität des Tons abhängig von der Position beziehungsweise dem Abstand der mobilen Vorrichtung zu der Anzeigefläche ist, insbesondere zu einer Stelle der Anzeigefläche, an der der Ton zu entstehen scheint.
    [0015] Verfahren zur Verortung akustischer Signale in einem realen Raum, mit den Schritten:
    Bestimmen von Position und Orientierung eines Kopfhörers in einem realen Raum mittels Verarbeitung von auf Ultrabreitband-Technologie basierenden Positionssignalen und Signalen, welche die Orientierung des Kopfhörers erfassen;,
    Zuordnen der Position und der Orientierung des Kopfhörers in dem realen Raum einer Position und einer Orientierung in einem dem realen Raum entsprechenden virtuellen Raum, Ausgeben akustischer Signale an den Kopfhörer in Abhängigkeit von der Position und der Orientierung in dem virtuellen Raum derart, dass die akustischen Signale für einen den Kopfhörer tragenden Hörer als in dem realen Raum verortet wahrnehmbar sind.
    类似技术:
    公开号 | 公开日 | 专利标题
    US9510164B2|2016-11-29|Haptic effects broadcasting during a group event
    KR20180108766A|2018-10-04|증강 현실 헤드폰 환경 렌더링
    CN106797525B|2019-05-28|用于生成和回放音频信号的方法和设备
    US20170291541A1|2017-10-12|Modifying an audio panorama to indicate the presence of danger or other events of interest
    JP5247925B2|2013-07-24|信号再生システム
    US10659896B2|2020-05-19|Methods of an intelligent personal assistant moving binaural sound
    US10937391B2|2021-03-02|Systems, methods, and media for displaying interactive augmented reality presentations
    US4817149A|1989-03-28|Three-dimensional auditory display apparatus and method utilizing enhanced bionic emulation of human binaural sound localization
    US20150208166A1|2015-07-23|Enhanced spatial impression for home audio
    US20190364378A1|2019-11-28|Calibrating listening devices
    CN103595953B|2017-06-20|一种控制视频拍摄的方法和装置
    EP2842529A1|2015-03-04|Audiowiedergabesystem zur Kategorisierung von raumbezogenen Objekten
    DE102005054258B4|2015-10-22|Verfahren zum Zuweisen einer Frequenz für eine drahtlose Audiokommunikation
    US20120288114A1|2012-11-15|Audio camera using microphone arrays for real time capture of audio images and method for jointly processing the audio images with video images
    Härmä et al.2004|Augmented reality audio for mobile and wearable appliances
    US9113034B2|2015-08-18|Method and apparatus for processing audio in video communication
    US8718285B2|2014-05-06|Decoding device, coding and decoding device, and decoding method
    US8825187B1|2014-09-02|Surround sound in a sensory immersive motion capture simulation environment
    CN110291820A|2019-09-27|音频源的无线协调
    DE102012208825A1|2012-12-06|3d-audiogerät
    EP0938832B1|2005-12-21|Verfahren und vorrichtung zur projektion von schallquellen auf lautsprechern
    US9622013B2|2017-04-11|Directional sound modification
    US8624975B2|2014-01-07|Audio module for a video surveillance system, video surveillance system and method for keeping a plurality of locations under surveillance
    CN102647944B|2016-07-06|耳鸣治疗系统和方法
    US20050281411A1|2005-12-22|Binaural horizontal perspective display
    同族专利:
    公开号 | 公开日
    WO2015144293A3|2016-02-04|
    EP3117632A2|2017-01-18|
    WO2015144293A2|2015-10-01|
    EP3117632B1|2020-04-29|
    DE102014204630A1|2015-09-17|
    引用文献:
    公开号 | 申请日 | 公开日 | 申请人 | 专利标题
    法律状态:
    2020-08-14| PUAI| Public reference made under article 153(3) epc to a published international application that has entered the european phase|Free format text: ORIGINAL CODE: 0009012 |
    2020-08-14| STAA| Information on the status of an ep patent application or granted ep patent|Free format text: STATUS: THE APPLICATION HAS BEEN PUBLISHED |
    2020-09-16| AK| Designated contracting states|Kind code of ref document: A1 Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
    2020-09-16| AC| Divisional application: reference to earlier application|Ref document number: 3117632 Country of ref document: EP Kind code of ref document: P |
    2021-03-19| STAA| Information on the status of an ep patent application or granted ep patent|Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE |
    2021-04-21| 17P| Request for examination filed|Effective date: 20210316 |
    2021-04-21| RBV| Designated contracting states (corrected)|Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR |
    2021-10-08| STAA| Information on the status of an ep patent application or granted ep patent|Free format text: STATUS: EXAMINATION IS IN PROGRESS |
    2021-11-10| 17Q| First examination report despatched|Effective date: 20211012 |
    优先权:
    申请号 | 申请日 | 专利标题
    [返回顶部]